package com.czk.rdd.builder

import org.apache.spark.rdd.RDD
import org.apache.spark.{SparkConf, SparkContext}

/**
 * @Author:ChenZhangKun
 * @Date: 2021/12/8 15:39
 */
object Spark_03_RDD_File1 {
  def main(args: Array[String]): Unit = {
    val sparkConf = new SparkConf().setMaster("local[*]").setAppName("RDD")
    val sc = new SparkContext(sparkConf)
    // textFile 读取,以行为单位来读取数据
    // wholeTextFiles 以文件为单位读取数据
    // 读取结果为元祖，第一个元素表示文件路径，第二个元素表示文件内容
    val rdd: RDD[(String, String)] = sc.wholeTextFiles("datas")
    // 打印
    rdd.collect().foreach(println)
  }
}
